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Beschreibung 

Verfahren und Einrichtung zur Bestimmmung und mindestens teilweisen Korrektur der 
Fehler eines Bildwiedergabesystems 

Die Erfindung betriffl ein Verfahren und eine Einrichtung zur Bestimmmung und mindestens 
teilweisen Korrektur der Fehler eines Bildwiedergabesystems. Die Erfindung ist besonders 
geeignet fur die Korrektur der Bildwiedergabe auf einem Bild- bzw. Projektionsschirm, wie sie 
z. B. bei Fernsehern, Monitoren, Displays oder Projektoren auf Basis von z. B. Rohren-, Plasma- 
, LCD- oder Mikrospiegel-Technik erfolgt, aber in angepaBter Form auch einsetzbar in der 
Rontgenbildtechnik sowie flir digitale Kopierer, Scanner, Bildwandler u. dgl. 

Das Verfahren korrigiert typische Fehler, die bei der Bildwiedergabe auftreten, hervorgerufen 
durch Unscharfen, Verzerrungen und eine ungleichmaBige Ausleuchtung sowie Farb- und 
Konvergenzfehler. Dadurch werden die Anforderungen an die mechanischen, optischen und 
elektronischen Teile wie Strahlenkanonen, LCD-Paneele und Projektionsobjektive sowie deren 
exakte Justage minimiert. Aber auch Unzulanglichkeiten des Projektions- bzw. Bildschirms 
sowie Verzerrungen durch Schragprojektion (Keystone- Verzerrung) konnen korrigiert werden. 

Das Anwendungsgebiet der Erfindung ist jedoch nicht ausschlieBlich auf die Fehlerkorrektur 
beschrankt, d. h. auf die Verringerung bzw. Beseitigung unerwunschter Anderungen der 
Bilddaten, die durch ein reales Bildwiedergabesystem im Vergleich zu einem idealen System 
verursacht werden. Grundsatzlich ist die Erfindung auch in Verbindung mit solchen Systemen 
einsetzbar, in denen die zur Visualisierung bzw. Wiedergabe vorgesehenen Bilddaten vor ihrer 
Eingabe in das Bildwiedergabesystem einer Transformationen unterzogen werden sollen, die 
durch Vorgabe des Ergebnisses der Transformation von Ausgangsbilddaten in transformierte 
Bilddaten, z. B. anhand von Musterbildern definierbar ist. 

Die Bezeichnung "Bildwiedergabesystem" soil daher nachfolgend als Sammelbegriff fur diese 
Systeme verwendet werden. Ferner sollen unter "digitalen" bzw. "digitalisierten" Bilddaten oder 
"digitalen Testbilddaten" nicht nur bereits primar vorliegende digitale Bilddaten verstanden 
werden, sondern auch solche, die mittels Digitalisierung von primar analogen Bilddaten erzeugt 
wurden. 



Es ist bereits ein Video-Projektionsgerat bekannt (z. B. US5231481), das eine auf der Basis 
einer Ruckkopplung arbeitende Korrektureinrichtung aufweist, mit der Fehler des projizierten 
Bildes korrigierbar sind, die z. B. durch optische oder elektrische Komponenten des 
Projektionsgerates bedingt sind. Die Ruckkopplung erfolgt iiber eine Kamera, die eine 
Aufhahme eines mittels des Video-Projektionsgerat es projizierten Testbildes erzeugt. 
Die von der Videokamera aufgenommenen und gespeicherten Bilddaten des projizierten 
Testbildes werden mit den Bilddaten des zu projizierenden urspriinglichen Testbildes, das als 
fehlerfrei gilt, verglichen, um Korrektursignale zu berechnen und zu speichern. Mit diesen 
Korrektursignalen werden die Steuereinheiten des Projektionsgerates angesteuert, urn die 
Qualitat des projizierten Bildes zu verbessern. 

Ein anderes Verfahren (US5475447) betrifft die automatische Konvergenz- und Verzeichnungs- 
Korrektur eines von einem Videoprojektor auf eine von einem Rechteck eingerahmte 
Projektionsflache projizierten Bildes. Es basiert auf einem Videoprojektor, der von einem 
Video-Signalgenerator angesteuert wird. Eine Kamera bildet die Projektionsflache ab und 
erzeugt mittels eines Signalprozessors ein Videosignal, das in einem Bildspeicher gespeichert 
wird. Eine Rechnereinheit berechnet die Koordinaten der vier Eckpunkte der rechteckigen 
Projektionsflache und ermittelt daraus die Position von Referenzpunkten innerhalb der 
Projektionsflache. Ein Signalgenerator erzeugt ein Video-Signal mit Marken an Positionen, die 
den von der Rechnereinheit berechneten Positionen der Referenzpunkte entsprechen. Dieses 
Video-Signal steuert den Videoprojektor an, der ein Bild mit den Marken projiziert. Dieses Bild 
mit den Marken wird mittels der digitalen Kamera in einem Bildspeicher gespeichert. Aus der 
Abweichung zwischen den Positionen der im Bildspeicher gespeicherten Referenzpunkte und 
den Positionen der gespeicherten Marken wird ein Korrektursignal fur die automatische 
Konvergenz- und Verzeichnungs-Korrektur des Videoprojektors abgeleitet. 

Das Video-Projektionsgerat gemaB (US5091773) weist ebenfalls eine auf der Basis einer 
negativen Ruckkopplung arbeitende Korrektureinrichtung auf, um Fehler des projizierten Bildes 
zu korrigieren, die z. B. durch das optische System bedingt sind. Zu diesem Zweck wird ein 
Testbild, das aus im Raster angeordneten hellen Bildpunkten besteht, mittels des 
Projektionsgerates auf eine Projektionsflache abgebildet. Dieses auf der Projektionsflache 
erzeugte Bild wird auf eine im wesentlichen opaque Filtermaske abgebildet, die nur an den 
Punkten transparent ist, in denen die Abbildung eines fehlerfrei projizierten Testbildes helle 
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Bildpunkte aufweist. Aus dem MeBwert fur die von der die Filtermaske hindurchgelassene 
Lichtintensitat werden Korrektursignale ermittelt, mit denen das Video-Projektionsgerat 
angesteuert wird. 

Den benannten Verfahren ist gemeinsam, daB aus dem von einer digitalen Kamera gespeicherten 
Testbild ein Korrektursignal zur Verbesserung der Bildqualitat des projizierten Bildes berechnet 
wird, das den Bildgenerator des Projektionssy stems ansteuert und dadurch z. B. Verzeichnungs- 
oder Konvergenzfehler kompensiert 

Die Berechnung der Korrekturwerte ist aufwendig und nur fur die jeweils analysierten 
Bildpunkt-Orte gultig. Daher muB bei den Verfahren eine Interpolation fur die dazwischen 
liegenden Positionen erfolgen, was aufwendig ist und nur eine Naherung darstellt. Es werden 
auch nur einzelne Fehler - hauptsachlich die Bildgeometrie - korrigiert, weitere Fehler im 
Ubertragungsvehalten des Wiedergabesystems wie die im Anspruch beschriebenen bleiben 
unberiicksichtigt. Bei den beschriebenen Verfahren muB zum Teil in die Ansteuerelektronik 
oder Mechanik bzw. Optik eingegriffen werden. Teilweise miissen auch Bild- bzw. 
Projektionsschirm verandert werden. Nachteilig ist auch, daB die Berechnung der 
Korrekturwerte bei jeder Wiederholung der Wiedergabe und fur jedes benutzte 
Bildwiedergabesystem erneut vorgenommen werden muB. 

Dies erscheint in den Fallen besonders nachteilig, bei denen ein Anwender mehrere gleichartige 
Bildwiedergabesysteme benutzt, von denen bekannt ist, daB sie im wesentlichen die gleichen 
Abbildungsfehler besitzen. 

Der Erfindung liegt daher die Aufgabe zugrunde, ein Verfahren und eine zugehorige 
Einrichtung zu entwickeln, bei dem kein Eingriff in Elektronik, Mechanik oder Optik 
erforderlich ist, sondern ausschlieBIich die zu projizierenden Daten modifiziert werden und 
damit das gesamte Ubertragungsverhalten des Wiedergabesystems beriicksichtigt wird. 

ErfindungsgemaB wird diese Aufgabe durch ein Verfahren gemaB Anspruch 1 sowie eine 
Einrichtung gemaB Anspruch 8 gelost. Vorteilhafte Ausfiihrungsformen der Erfindung und 
deren Vorteile ergeben sich unmittelbar aus den Unteranspriichen sowie den folgenden 
Angaben. 
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Der Grundgedanke des erfindungsgemafien Verfahrens besteht darin, dafi ein neuronales Netz 
als ortsabhangig arbeitendes Digitalfilter zur Vorkorrektur verwendet wird, wobei unter der 
Voraussetzung eines linearen Aussteueningsverhaltens der Bildelemente ein einschichtiges 
neuronales Netz zum Einsatz kommt. Das neuronale Netz kann programmtechnisch auf einem 
Standardrechner oder als eine Schaltungsanordnung implementiert sein. 

Als Lernmuster fur das neuronale Netz dient das digitalisierte Bild einer vom 
Bildwiedergabesystem erzeugten unkorrigierten Abbildung des Testbildes, wahrend die digital 
vorliegenden Bilddaten des Testbildes direkt die Lernvorgabe fur den Anlernvorgang definieren. 
Nach dem Lemvorgang werden die Eingange des neuronalen Netzes durch das 
wiederzugebende Bild gebildet, und die Ausgange bilden direkt die Pixeleingangswerte des 
Bildwiedergabesystems, das dann durch ein vorkorrigiertes Bild angesteuert wird. 
Auf diese Weise werden die Fehler im Ubertragungsverhalten von Bilderzeugung, Optik und 
Projektion fur beliebige wiederzugebende Bilder von vornherein berlicksichtigt und korrigiert, 
so dafi die kompensierten Fehler auf dem Projections- bzw. Bildschirm nicht mehr auftreten. 

Der besondere Vorteil der Erfindung besteht demnach darin, dafi kein EingrifF in Ablenkung 
und Intensitatsmodulation des Bildwiedergabesystems erfolgen muB oder Veranderungen am 
Bild- bzw. Projektionsschirm vorgenommen werden miissen. 

Das System beriicksichtigt mehrere Arten von Abbildungsfehlern gleichzeitig. Dabei handelt es 
sich um Bildverzerrungen und Unscharfen, die durch geometrische Verzeichnungen bzw. 
Defokussierung der Optik, durch Schiefprojektion (Keystone- Verzerrung) sowie durch 
Kriimmungen der Projektionswand hervorgerufen werden. Auch eine ungleichmafiige 
Helligkeitsverteilung, die durch variierende Reflexionseigenschaften der Projektionswand und 
die Optik bzw. Lichterzeugung hervorgerufen werden, werden korrigiert. Bei der 
Farbbildprojektion werden Farbfehler, die an Farbiibergangen auftreten (Farbsaume), korrigiert. 
Ein spezielles Verfahren sorgt daftir, dafi die Farbbalance des Projektors ftir Flachen konstanter 
Farbe erhalten bleibt. Eine fehlerhafte Ausrichtung der Farbkanale wird ebenfalls ausgeglichen 
(Konvergenzkorrektur) . 

Anwendungsbereiche liegen vor allem bei Anzeigeeinrichtungen zur Auf- und Ruckprojektion 
mit Daten- und Videoprojektoren, bei Auflagedisplays fiir Overheadprojektoren sowie in der 
Fernseh- und Monitordisplaytechnik. Die Erfindung kann entweder zur Einrichtung von 



Systemen am Ort der Anwendung benutzt werden oder zum Abgleich in der Endfertigung von 
Geraten. Die Erfindung ist auch fur Systeme zur Projektion von Stereobildern geeignet. 
Die erfindungsgemaBe Losung wird nachfolgend anhand eines Ausfiihrungsbeispieles naher 
erlautert. In der zugehorigen Zeichnung zeigt 

Fig. 1 eine Anordnung zur Durchfuhrung des erfindungsgemaBen Verfahrens, 

Fig. 2. eine schematische Darstellung des Anlernvorganges gemaB der Erfindung, 

Fig. 3 eine schematische Darstellung des Korrekturvorganges gemaB der Erfindung, 

Fig. 4 die prinzipielle Struktur des kunstlichen neuronalen Netzes zur Vorkorrektur (a) und 
flachige Verknupfting an einem einzelnen Neuron (b), Realisierung mit den 
Grundfarben RGB (c), 

Fig. 5 ein typisches Testbild zur Lerndatengewinnung. 

Die wiederzugebenden Bilder (Fig. 1) befinden sich in digitaler Form in einem Rechner, an den 
ein Bildwiedergabegerat geschaltet ist. Dadurch konnen die Bilder wie ublich auf einem 
Bildschirm bzw. einer Projektionsflache sichtbar gemacht werden. 

Das Verfahren verlauft in zwei Phasen - dem Lernvorgang (Abgleich) und dem laufenden 
Betrieb. Dabei wird zum Abgleich der Korrektur (Fig. 2) ein Bildaufzeichnungsgerat (z. B. eine 
elektronische Kamera) benutzt , um ein wiedergegebenes Testbild aufzunehmen, das wieder in 
den Rechner eingelesen wird. Um zusatzliche Fehler zu vermeiden, muB das 
Bildaufzeichnungsgerat eine hohere Bildqualitat besitzen als die zu korrigierende 
Bildwiedergabe, oder storende Abbildungseigenschaften des Bildaufzeichnungsgerats werden 
vor der weiteren Auswertung kompensiert. 

Fig. 4 zeigt in vereinfachter schematischer Darstellung das kunstliche neuronale Netz als 
ortsabhangig arbeitendes Digitalfilter, wie es fur die Korrektur verwendet wird. Unter der 
Voraussetzung eines linearen Gesamtsystems kommt eine einschichtiges neuronales Netz nach 
Fig. 4a zum Einsatz (vereinfachend eindimensional und nur fur einen Farbkanal dargestellt). Die 
Emgange Xj sind beim Anlernvorgang die Pixelwerte des aufgenommenen Bildes, die iiber die 
Gewichte mit einander verknupft werden. Im tatsachlichen zweidimensionalen Fall sind die 



Neuronen gleichfalls flachig mit den benachbarten verknupft und nicht nur in einer Zeile, wie 
Fig. 4b am Beispiel eines Neurons zeigt. Bei N Farbkanalen sind N 2 neuronale Netze nach 
Fig. 4b erforderlich fur eine umfassende Berticksichtigung der Fehler. Fig. 4c zeigt ein Beispiel 
fur ein System mit den Grundfarben RGB. Jeder korrigierte Farbkanal R'^B 1 ergibt sich 
demnach aus der Summe der Ausgange der neuronalen Netze 

RR,RG,RB,BR,BB,BG,BR,BG,BB, die j ewei j s ^ den Kanalen R,G und B gespeist werden. 
Der Abgleich des Systems zur Korrektur erfolgt durch das Anlernen des kunstlichen neuronalen 
Netzes mittels eines Rechners. Das aufgenommene Testbild, das die zu korrigierenden Fehler 
enthalt, wird digital als Lernmuster abgespeichert und dient zur Lerndatengewinnung fur das 
kunstliche neuronale Netz. Da das Testbild fehlerfrei im Rechner vorliegt, definiert es direkt die 
Lernvorgabe ftir den Anlernvorgang. 

Das Testbild kann einen relativ einfachen Aufbau haben (Fig. 5). Das kunstliche neuronale Netz 
leitet durch Auswertung der Lerndaten im Zusammenhang mit der Lernvorgabe die 
erforderlichen Parameter des neuronalen Netzes fur die Korrektur ab, indem durch Vergleich der 
Ausgange des neuronalen Netzes yj mit der Lernvorgabe die Gewichte des neuronalen Netzes 
Wy bestimmt werden. Anders als bei US5091773 gestattet der Anlernvorgang eine ortlich 
gleitende Ermittlung von Korrekturwerten, so dafi keine Interpolation erforderlich ist. 
Nach dem Lernvorgang werden die Eingange des neuronalen Netzes durch das 
wiederzugebende Bild gebildet, und die Ausgange bilden direkt die Pixeleingangswerte der 
Bildwiedergabeeinrichtung, die dann durch ein vorkorrigiertes Bild angesteuert wird. Die 
Umsetzung des einmal abgeglichenen Korrektursystems kann programmtechnisch auf einem 
Standardrechner oder durch eine spezielle Hardwarelosung erfolgen. Im Unterschied zu 
EP934653 muB auf diese Weise kein Eingriffin Ablenkung und Intensitatsmodulation der 
Bilderzeugungseinrichtung erfolgen. 

Im laufenden Betrieb (Fig. 3) werden beliebige Bilder so vorkorrigiert erzeugt, daB die 
kompensierten Fehler auf dem Projektions- bzw. Bildschirm dann nicht mehr auftreten . Das 
System zur Vorkorrektur wird so in den SignalfluBweg integriert, daB die Fehler von 
Bilderzeugung, Optik und Projektion von vornherein beriicksichtigt werden. 



- 1 - 

Patentanspruche 

1 . Verfahren und eine Einrichtung zur Bestimmmung und mindestens teilweisen Korrektur der 
Fehler eines Bildwiedergabesystems, bei dem die wiederzugebenden digitalen Bilddaten auf den 
Eingang eines neuronalen Netzes, das auf einem Rechner oder als Schaltung implementiert ist, 
gegeben werden, die Korrektur der Fehler durch dieses neuronale Netz erfolgt und die 
Ausgangswerte des neuronalen Netzes die Eingabewerte des Bildwiedergabesystem bilden, 
wobei die Parameter dieses neuronalen Netzes in einem vorhergehenden Lernvorgang ermittelt 
wurden, bei dem zur Erzeugung der Lernvorgabe (Target Data) ein Testbild mit vorgebbarer 
Bildqualitat dient. 

2. Verfahren nach Anspruch 1, dadurch gekennzeichnet, daB als Lerndaten, die fur den 
Lernvorgang des neuronalen Netzes auf den Eingang des neuronalen Netzes gegeben werden, 
das digitalisierte Bild von einer vom Bildwiedergabesystem bewirkten unkorrigierten Abbildung 
des Testbildes verwendet wird, wahrend fur die Erzeugung der Lernvorgabe die originalen, vom 
Bildwiedergabesystem wiederzugebenden digitalen Testbilddaten verwendet werden. 

3. Verfahren nach Anspruch 1 oder 2, dadurch gekennzeichnet, daB als Parameter des 
neuronalen Netzes Werte benutzt werden, die fur ein anderes Bildwiedergabesystem ermittelt 
wurden, dessen Abbildungsqualitat im wesentlichen ubereinstimmt mit der Abbildungsqualitat 
des zu korrigierenden Bildwiedergabesystems. 

4. Verfahren nach einem der Anspriiche 1 bis 3, dadurch gekennzeichnet, daB ein einschichtiges 
neuronales Netz mit linearer Transferfunktion verwendet wird und damit eine Funktion der 
Korrektur bei beliebigen Helligkeiten gewahrleistet ist, Linearitat der Empfindlichkeit der 
Bildelemente vorausgesetzt. 

5. Verfahren nach einem der vorhergehenden Anspriiche, dadurch gekennzeichnet, daB fur jeden 
der N zu korrigierenden Farbkanale des Bildwiedergabesystems N unabhangige neuronale Netze 
verwendet werden, deren Ausgange addiert werden und die korrigierten Farbkanale darstellen. 

6. Verfahren nach einem der vorhergehenden Anspriiche, dadurch gekennzeichnet, daB die 
originalen digitalen Testbilddaten ein Karomuster darstellen. 
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7. Verfahren nach einem der vorhergehenden Anspriiche, dadurch gekennzeichnet, daB wahrend 
des Lernvorganges eine Fehlerkorrektur fur geometrische Bildfehler, Konvergenz-, 
Fokussierungs- und Helligkeitsfehler im Zusammenhang trainiert wird. 

8. Einrichtung zur Bestimmmung und mindestens teilweisen Korrektur der Fehler eines 
Bildwiedergabesystems, mit 

- einem auf einem Rechner oder als Schaltung implementierten neuronalen Netz, dessen 
Ausgange auf die Eingange des zu korrigierenden Bildwiedergabesystems geschaltet sind 
und dessen Parameter ein einem vorhergehenden Lernvorgang ermittelt wurden, wobei als 
Lernvorgabe ein Testbild mit vorgebbarer Bildqualitat dient, 

# - einem Bildspeicher fur die mittels des Bildwiedergabesystems wiederzugebenden digitalen 
Bilddaten, der mit den Eingangen des neuronalen Netzes verbunden ist, 

- einem Bildaufzeichnungsgerat, das mindestens zur einmaligen Generierung digitalisierter 
Bilddaten einer vom Bildwiedergabesystem erzeugten unkorrigierten Abbildung des 
Testbildes verfugbar ist und mindestens fur die zur Bestimmung der Paramter des; 
neuronalen Netzes zur Korrektur notige Dauer des Lernvorganges direkt oder uber 
mindestens einen Bildspeicher mit dem Eingang des neuronalen Netzes verbunden ist. 

9. Einrichtung nach Anspruch 7, dadurch gekennzeichnet, daB das Bildaufzeichnungsgerat eine 
Abbildungsqualitat, gegebenenfalls nach entsprechender Fehlerkorrektur, aufweist, welche die 
Abbildungsqualitat des Bildwiedergabesystems zumindest bezuglich der zu korrigierenden 

9 Fehlerarten des Bildwiedergabesystem ubertrifft. 



Zusammenfassung 

Verfahren und Einrichtung zur Bestimmmung und mindestens teilweisen Korrektur der 
Fehler eines Bildwiedergabesystems 

Die Erfindung betriflft ein Verfahren und eine Einrichtung zur Bestimmmung und mindestens 
teilweisen Korrektur der Fehler eines Bildwiedergabesystems. 

Die Erfindung ist besonders geeignet ftir die Korrektur der Bildwiedergabe auf einem Bild- bzw. 
Projektionsschirm, wie sie z. B. bei Fernsehern, Monitoren, Displays oder Projektoren auf Basis 
von z. B. Rohren-, Plasma-, LCD- oder Mikrospiegel-Technik erfolgt, aber in angepaflter Form 
auch einsetzbar in der Rontgenbildtechnik sowie fur digitale Kopierer, Scanner, Bildwandler u. 
dgl. Die Korrektur erfolgt ausschlieBlich durch Modlfizierung der zu wiederzugebenden D^ten, 
wobei das gesamte Ubertragungsverhalten des Wiedergabesystems beaicksichtigt wird und 
keine EingrifFe in Elektronik, Mechanik oder Optik des Bildwiedergabesystems notwendig sind. 
Dies wird unter Verwendung eines neuronalen Netzes erreicht, bei dem das digitalisierte Bild 
einer vom Bildwiedergabesystem erzeugten unkorrigierten Abbildung des Testbildes als 
Lernmuster fur das neuronale Netz dient, wahrend die digital vorliegenden Bilddaten des 
Testbildes direkt die Lernvorgabe flir den Anlernvorgang definieren. 
Nach dem Lernvorgang werden die Eingange des neuronalen Netzes durch das 
wiederzugebende Bild gebildet, und die Ausgange bilden direkt die Pixeleingangswerte des 
Bildwiedergabesystems, das dann durch ein vorkorrigiertes Bild angesteuert wird. 
Auf diese Weise werden die Fehler im Ubertragungsverhalten von Bilderzeugung, Optik und 
Projektion fur beliebige wiederzugebende Bilder von vornherein beriicksichtigt und korrigiert, 
so daB die kompensierten Fehler auf dem Projektions- bzw. Bildschirm nicht mehr auftreten. 
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